\chapter{实验验收列表:2022-2023春季学期}

本学期实验最终提交版应包含的最少内容。

\section{实验一：单机优化算法构建}
\begin{itemize}
    \item GD、SGD、Adam三种算法的实现代码；
    \item 在MNIST数据集上实现图像分类任务训练过程中的损失函数变化图像。
\end{itemize}

\section{实验二：数据并行和模型并行}
\begin{itemize}
    \item 数据并行：随机采样与随机划分的实现代码；
    \item 模型并行：将模型横向划分的实现代码；
    \item 在两种数据并行方法下和在模型并行与否的两种情况下，比较模型性能。
\end{itemize}

\section{实验三：通信模型与参数聚合}
\begin{itemize}
    \item AllReduce和AllGather聚合方法的实现代码；
    \item 上述两种方法的通信开销对比；
    \item 瓶颈节点的设置与瓶颈对集体通信和性能的影响。
\end{itemize}